查看原文
其他

小身材 大作为的Azure Kinect

The following article is from 微软HoloLens Author Azure Kinect



随着本周一Azure Kinect DK在MWC2019微软新品发布会上的亮相,这个小身材的MR设备家族新成员也正式进入大家的视野中。今天,让我们一起用8分钟的时间,来了解一下这款小身材,大作为的产品吧!


相遇 重逢

如果提到Kinect,相信大家都不会陌生。从2010年Kinect以Xbox 360配件的角色首次登场算起,在过去的9年间,我们看到了从Kinect到Kinect for Windows,从一款游戏机配件发展为独立硬件,从消费者市场延伸到商用市场。Kinect的最新动向源于2018年微软宣布的Project Kinect for Azure计划,人们看到Kinect以一种全新的面貌回归。在MWC2019微软新品发布会上的Azure Kinect DK正是Project Kinect for Azure的落地成果。此外,我们了解到过往的历史中,中国市场一直对Kinect颇为喜爱,无论在消费市场还是商用市场,都有许多富有创意的开发者围绕Kinect进行了内容开发。所以这次Azure Kinect DK在中国的发售,恰是一场久别重逢。


https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=y1359srsetu


Azure Kinect DK

这次在中国开启预售的Azure Kinect DK,是一款开发者工具包,也是一款PC外设,它将多款业界领先的人工智能传感器集于一身,可以进行先进的计算机视觉和语音模型开发。之所以叫做工具包,因为它是一款面向专业开发者和企业用户的商用设备,开发者拿到设备后需要首先进行内容开发,并不能开箱即用,所以个人消费者和Xbox游戏玩家并不是它的目标用户。


传感器界的瑞士军刀

在这里,要特别强调一下上文提到的多款业界领先的人工智能传感器集于一身,它们包括:100万像素TOF深度摄像头、1200万像素高清摄像头,7麦克风圆形阵列,和方向传感器(IMU) - 囊括了深度,视觉,声音和方向四大传感器类别。Azure Kinect的核心正是微软HoloLens 2所使用的传感器套件。TOF深度摄像头能够近乎实时捕捉周围环境信息,并基于扫描到的深度数据,将捕捉到的人、物以深度摄像画面和三维点云效果来进行3D数据表现。同时,用户可以选择宽、窄两种FOV视角,可以更好的根据不同场景需求优化应用。此外,1200万像素高清摄像头可以支持输出4K高清画质,在摄像头的后方排布着紧密的7麦克风圆形阵列和方向传感器,通过这些可以捕捉360度环绕音效并识别声源方位。

此外,Azure Kinect的尺寸长度不到13厘米,厚度仅为4厘米,只有手掌大小。别看它的体积只有Kinect for Windows v2的1/2,但是它的识别准确度却是v2的2倍。小身材,样样行,所以微软的工程师们开玩笑说它是传感器界的瑞士军刀。

1. 100万像素TOF深度摄像头, 宽/窄FOV

2. 7麦克风圆形阵列

3. 1200万像素高清摄像头

4. 加速度计和陀螺仪(IMU),方向传感器

5. 外部同步引脚,可同时轻松同步多个 Kinect 的传感器数据流

 

面向开发者的多种SDK和API

当开发者拿到一台Azure Kinect时,微软提供了一系列SDK和API,帮助开发者快速启动项目。

传感器SDK:可以为RGB、IMU、设备校准数据和同步控制的传感器原始数据提供访问。

身体跟踪SDK:可以提供实例分割、2D 关键点以及观察到的或估算的3D关节和关键点,以便获得完整清晰和唯一性鉴别的多骨骼身体跟踪能力。

Azure认知服务 - 视觉API:开发者可以使用高级算法进行图像处理,并获取返回信息,例如光学字符识别 (OCR) 或图像分类。

Azure 认知服务 – 语音API:开发者可以使用语音转文本、语音翻译和意向识别等功能。

传感器SDK和身体跟踪SDK将于产品正式发货时推出,并且需基于Windows或Linux(即将推出)。Azure认知服务的语音和视觉API已经发布。

Azure Kinect DK识别效果

在项目规划时,我们奉上几个细节,可以帮助你更高效的设计方案:

  1. Azure Kinect是一款适用于室内的产品。户外场景确实具有魅力,但技术挑战无疑很大,因此能够正确选择合适的环境是项目成功的起步。

  2.  我们建议设备使用时的周边环境温度为10-25摄氏度,这样可以保证设备运行状态的稳定性和可靠性。

  3. Azure Kinect既可以单独与PC相连,也可以多个设备同步,从而更加精准的捕捉3D环境。

 


硬件配置

Azure Kinect做为PC外设,与之相匹配的PC需要具备如下的基本配置:采用第7代 Intel®CoreTM i3处理器(双核2.4GHz包含HD620 GPU或更快)的 Windows 10® 计算机,操作系统至少为Windows 10 2018春季更新,搭载USB 3.0端口,4GB内存,从而支撑后台运算。大家可以在PC上通过自行下载Azure Kinect Viewer来观看三维数据。Azure Kinect Viewer提供深度画面、彩色画面和红外画面三种不同画面模式以供用户理解深度数据。

Azure Kinect硬件参数及系统要求

 

小身材 大作为

Azure Kinect拥有广阔的行业前景,为我们的行业用户以及开发者提供了创新性的解决问题的方法。我们今天分享几个典型场景,希望为大家打开更广阔的思路。

在医疗健康和生命科学领域,医生可以依据Azure Kinect人体跟踪SDK的数据实时反馈,监控患者的体征和表现,加以分析,从而设计与改进治疗方案,帮助患者以更快的速度康复。同样,教练员也可以通过Azure Kinect监测和改进运动员的训练方案,提升训练质量。

在零售行业,通过Azure Kinect与Azure 认知服务API的结合,人们不仅可以进行更加精准的库存管理和产品跟踪,也可以根据客户的表情数据判断产品受欢迎程度,创建一套另顾客舒适和愉悦的购物体验。

在物流与制造行业中,人们不仅可以通过Azure Kinect进行智能码垛和卸垛,从而更有效地运送和接收物品,也可以通过生产线零件的外观识别和异常检测来提高生产效率和安全性。

我们相信Azure Kinect通过智能云+边缘设备+混合现实的行业解决方案,一定会创造众多的可能性,而这些突破性的解决方案可能是之前从未想象到的。

 

预售开启

Azure Kinect在中国的售价为人民币2988,目前中国和美国做为首批发售国家,已经正式开启了预售登记,首批订单正式发货时间预计为6月底之前。微软中国官方商城和天猫商城微软中国官方旗舰店为中国区在线销售平台,中国地区的用户可以通过扫描下方二维码登陆页面进行预售登记

Azure Kinect DK 登记预定页面

好了,今天我们关于Azure Kinect的初步介绍就到这里了。今后我们还将针对技术特性,行业场景和案例逐一展开介绍,请大家持续关注,了解最新的产品资讯!

 

产品资源链接

产品官网 azure.com/kinect(中文版官网将于3月份上线)

更多技术细节查阅 aka.ms/kinectdocs

    您可能也对以下帖子感兴趣

    文章有问题?点此查看未经处理的缓存